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Verfahren zum Erkennen einer auf einem Substrat aufzubringenden Struktur 

mit mehreren Kameras sowie eine Vorrichtung hierfur 

Die vorliegende Erfindung betrifft ein Verfahren zum Erkennen einer auf einem 
Substrat aufzubringenden Struktur mit zumindest einer bzw. mehreren Kameras 
gemafS dem Oberbegriff von Anspruch 1 sowie eine entsprechende Vorrichtung 
hierfdr. 

Herkommlicherweise werden bislang zum Erkennen einer auf einem Substrat 
aufzubringenden Struktur optische Vermessungen durchgefuhrt, wobei haufig 
verschiedene Systeme zur vollautomatischen Prufung der Struktur, u.a. Klebstoff und 
Dichtmittelraupen, verwendet werden. Hierzu werden mehrere Videokameras auf die 
zu erkennende Struktur gerichtet, wobei zusatzlich ein Beleuchtungsmodul 
erforderlich ist, das zur Erzeugung eines kontrastreichen Kamerabildes dient. 

Urn eine Kleberraupe bzw. Kleberspur beim Auftragen Qberwachen zu k6nnen, ist es 
erforderlich, dass eine Referenzkleberspur eingelernt wird, d.h. von der Kamera bzw. 
den Kameras abgefahren wird, urn daraus entsprechende Parameter zu berechnen, 
nach denen die aufgebrachten Kleberspuren daraufhin bewertet werden. 

Bisher war es erforderlich, dass beim Einlemen einer Referenzkleberspur jede 
Kamera einzeln diese Referenzkleberspur abfahren musste, um fOr alle Positionen 
Kamerabilder zu erhalten. Das heilit, dass bei der Verwendung von drei Kameras die 
Referenzkleberspur dreimal hintereinander abgefahren werden musste und die drei 
unterschiedlichen Bildsequenzen der drei Kameras zugeordnet werden mussten. 
Daraus ergibt sich der Nachteil, dass die Parametrierung der Referenzkleberspur 
umstandlich und zeitintensiv ist sowie zu einer hohen Ungenauigkeit fuhren kann. 

DarQber hinaus besteht Bedarf nach einem Verfahren zum Erkennen einer auf einem 
Substrat aufzubringenden Struktur fur zumindest eine bzw. mehrere Kameras, 
welches eine Auftragsstruktur bzw. Kleberspur mit hoher Genauigkeit und 
Geschwindigkeit wahrend des Auftragens Qberwacht. 
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Somit ist es Aufgabe der vorliegenden Erfindung, ein Verfahren zum Erkennen einer 
auf einem Substrat aufzubringenden Struktur fur zumindest eine bzw. mehrere 
Kameras bereitzustellen, welches eine schnelle Inbetriebnahme mit hoher 
Genauigkeit bzw. ein schnelles Einlernen der Referenzkleberspur ermoglicht. 

Des weiteren ist es Aufgabe der vorliegenden Erfindung, ein Verfahren zum 
Erkennen einer auf einem Substrat aufzubringenden Struktur fur zumindest eine bzw. 
mehrere Kameras bereitzustellen, welches eine Auftragsstruktur bzw. Kleberspur mit 
hoher Genauigkeit und Geschwindigkeit wahrend des Auftragens Qberwacht. 

Ferner ist es Aufgabe der vorliegenden Erfindung, eine geeignete Vorrichtung zur 
Durchfuhrung des erfindungsgemalJen Verfahrens bereitzustellen. 

Diese Aufgaben werden verfahrenstechnisch mit den Merkmalen von Anspruch 1 
und 4 sowie vorrichtungstechnisch mit den Merkmalen von Anspruch 28 gelost. 

Bei der erfindungsgema&en Vorrichtung und dem erfindungsgema&en Verfahren 
wird einerseits eine Referenzauftragsstruktur eingelernt und weitere aufgebrachte 
Auftragsstrukturen bzw. Kleberspuren zu dessen Bewertung mit der 
Referenzauftragsstruktur verglichen. Dabei ist es unerheblich, ob die 
erfindungsgemafce Auftragsvorrichtung, d.h. die Auftragsvorrichtung mit Kameras, 
oder als kinematische Umkehr das Substrat bewegt wird. 

Das erfindungsgemaSe Verfahren ermoglicht es, dass durch das Einlernen einer 
Referenzauftragsstruktur durch lediglich ein einmaliges Abfahren dieser 
Referenzauftragsstruktur die Bilder aller Kameras in einer Bildsequenz 
aufgenommen bzw. gespeichert werden konnen. Dadurch wird die Inbetriebnahme 
einer derartigen Vorrichtung auf eine kurze Einlernzeit verringert 

Gemali einem erfindungsgemafJen Verfahren zum Erkennen einer auf einem 
Substrat aufzubringenden Struktur, vorzugsweise einer Kleberraupe oder Kleberspur, 
mit mindestens einer Kamera, insbesondere mehreren Kameras, wobei die 
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aufgebrachte Struktur beim Abfahren fur die Bewertung dieser Struktur derail als 
optisches Abbild verarbeitet wird, dass von jeder Kamera lediglich ein Streifen des 
Bildes unter Bildung einer Bildsequenz aufgenommen wird und die 
Bildaufnahmefrequenz entsprechend der Datenverminderung durch die Aufnahme 
von lediglich einen Streifen des Bildes erhdht wird, erhalt man ein vorteilhaftes 
Erkennungsverfahren und Oberprufungsverfahren fur eine aufeubringende Struktur, 
welches eine hohe Genauigkeit aufweist und vollautomatisierbar ist. Dadurch kann 
eine Kleberspur parallel bzw. simultan zum Aufbringen der Kleberspur uberwacht 
werden. 

Weitere vorteilhafte Ausgestaltungen ergeben sich aus den Unteranspruchen. So ist 
von Vorteil, wenn von jeder Kamera lediglich ein Streifen des Bildes unter Bildung 
eines Teils der Bildsequenz aufgenommen wird, urn die zu verrechnenden Daten zu 
minimieren. Durch die geringeren zu verrechneten Daten konnen durch die hohe 
Bildaufnahmefrequenz vergleichsweise kurze Teilabschnitte der gesamten 
Kleberspur aufgenommen werden, welche beispielsweise zwischen 1mm und 3mm 
liegen, so dass die Kleberspur nach Art einer Vektorkette aus den einzelnen Bildern 
automatisch verfolgt werden kann. 

Daruber hinaus ist es von Vorteil, dass die Bildaufnahmefrequenz entsprechend der 
Datenverminderung durch die Aufnahme von lediglich einem Streifen des Bildes 
erhoht wird, was insbesondere durch den Einsatz der Partiai-Scantechnik ermbglicht 
wird, so dass eine hohere Bildwiederholrate erreicht wird. Folglich ist es moglich, 
dass synchron und parallel von alien Kameras gleichzeitig Bilder erfasst werden 
konnen. Die Bildaufnahmen folgen somit in definierten festen ZeitabstSnden und sind 
unabhangig von der Robotersteuerung. 

Erfindungsgemaft werden die Bildstreifen der einzelnen Kameras zu einem einzigen 
Bild zusammengefugt, wodurch sich der Vorteil ergibt, dass die jeweiligen Bilder der 
einzelnen Kameras jeweils ortsabhangig entsprechend zugeordnet sind und 
synchron aufgenommen und verarbeitet werden konnen. Somit wird des Weiteren ein 
fehlerhaftes Einlernen vermieden, da die Bilder der einzelnen Kameras stets zeit- 
und ortrichtig zugeordnet werden. 
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GemalJ einer bevorzugten AusfOhrungsform werden pro Kamera in etwa nur 1/4 der 
Bildzeilen als Bildstreifen verwendei una dadurch die Biidaufnahmefrequenz 
vervierfacht. 

Des weiteren ist es vorteilhaft, wenn die Parametrierung der von der 
Referenzauftragsstruktur erhaltenen Bildsequenz, welche aus einem einzigen 
Bildaufnahmelauf aller Kameras resultiert, automatisch durch ein einmaliges externes 
Anzeigen bzw. externes Markieren (bspw. per Mauskiick) der 
Referenzauftragsstruktur vorgenommen wird und zum Vergleich mit einer 
aufgebrachten Kleberspur verwendet wird. Fur die Parametrierung wird insbesondere 
der Roboterverfahrweg, die Roboterverfahrzeit, die Richtung, die Breite und die Gute 
der Kleberspur verwendet. Durch dieses einfache Parametrierungsverfahren 
vermindert sich die Gefahr von Fehlbedienung oder Fehlparametrierung, wobei das 
System auch durch gering qualifiziertes Personal bedienbar ist Somit erzeugt diese 
Parametrierung eine Vektorisierung der gesamten Kleberspur, wobei diese auf Grund 
der hohen Bildaufnahmefrequenz eine sichere und automatische Oberprufung der 
Kleberspur ermoglicht. Dadurch ergibt sich ferner, dass nach einem Tausch des 
Sensorkopfs lediglich eine Rekalibrierung bzw. eine Neukalibrierung erfolgen muss, 
ohne dass die Spur erneut eingelernt werden muss. 

GemafJ einer bevorzugten AusfOhrungsform der Erfindung wird eine 
Bewertungsfunktion, insbesondere Fuzzy-Bewertung zum Auswerten der 
Klebstoffspur bzw. Kleberspur verwendet, wobei insbesondere die Breite des 
Kantenpaares der rechten und linken Kante der Kleberspur, der mittlere Grauwert 
des projizierten Grauwertprofils zwischen dem Kantenpaar, der Randkontrast und der 
Positionsverlauf mittels der Bewertungsfunktion verrechnet werden, wobei als Folge 
davon die Klebstoffspur genau beschrieben werden kann, urn diese sicher 
automatisch zu erkennen. 

Ferner ist es vorteilhaft, wenn die Kante der Kleberspur auf einer umlaufenden Bahn 
bzw. Umlaufbahn und insbesondere einer im wesentlichen kreisfdrmigen Bahn bzw. 
Kreisbahn ermittelt wird, urn die Klebstoffspur urn die Auftragseinrichtung herum bei 
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einem beliebigen Verlauf jeweils in einem definierten Bereich zu erfassen. Dabei 
verlauft die Klebespur jeweiis innerhalb der umlaufenden Bahn, die elipsenformig, 
vieleckformig Oder in eiwa kreisformig sein kann. 

GemaS einer bevorzugten Ausfuhrungsform siimmt der Mittelpunkt der Kreisbahn 
Oder der umlaufenden Bahn im wesentlichen mit der Stelle uberein, aus welcher der 
Kleber zur Bildung der Kleberspur austritt, wobei jede Kamera zumindest ein 
Segment des aus der Kreisbahn gebildeten Kreises uberwacht 

Wenn jede Kamera zumindest einen Oberlappungsbereich mit zumindest einer 
angrenzenden Kamera uberwacht, konnen Fehler beim Obergang von einer Kamera 
zur nachsten vermindert werden. 

Besonders vorteiihaft ist es, wenn die Winkelwerte der Kreisbahn von 0 bis 360° ein 
globales Koordinatensystem der einzelnen Kameras bilden, wobei den Biidern der 
einzelnen Kameras ein Segment der Kreisbahn zugeordnet wird. AIs Folge davon 
kann der Verlauf der Kleberspur von jeweils zumindest einer aktiven Kamera verfolgt 
werden, wodurch mit relativ einfachen Mitteln Aussagen uber die gesamte 
Kleberspur sowie deren Lage bzw. Verlauf getroffen werden kann. 

GemaS einer bevorzugten Ausfuhrungsform deckt eine erste Kamera einen 
Winkelbereich von -10° bis 130° eine zweite Kamera einen Winkelbereich von 1 10° 
bis 250° und eine dritte Kamera einen Winkelbereich von 230° bis 1 0° ab, wenn drei 
Kameras verwendet werden. 

DarGber hinaus ist es von Vorteil, wenn bei dem Verlauf der Kleberspur von einer 
Kamera zur nachsten automatisch umgeschaltet wird, wenn die Kleberspur von dem 
Segment der Kreisbahn oder Umlaufbahn einer Kamera uber den 
Oberlappungsbereich in das Segment der Kreisbahn oder Umlaufbahn einer anderen 
Kamera verlauft. AIs folge davon ist es moglich, dass dem Verlauf der Spur bzw, der 
Lage der Spur sicher gefolgt werden kann und diese entsprechend voraussehbar 
sind. Somit kann rechtzeitig ein voll automatisches Umschalten der benachbarten 
Kameras erfolgen, so dass sich die Parametrierzeiten verringern. 
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Des Weiteren ist es von Vorteil, wenn zur Beleuchtung LED Leuchtmittel verwendet 
werden, welche eine Lichtfarbe umfassen, die einen geeigneten Kontrast zur Farbe 
der Auftragsstruktur aufweist. Die Lichtfarbe wird dabei derart ausgewahlt, dass sich 
nach dem Prinzip der Komplementarfarben der grolite Kontrast zwischen dem 
Substrat und der Klebstoffspur ergibt. Vorteilhafterweise werden Infrarot LED oder 
UV LEDs verwendet. Besondere Vorteile ergeben sich, wenn man Leuchtdioden 
verwendet, die auf Grund ihrer besonderen Bauweise in der Lage sind, rotes, grunes 
und blaues Licht zu emittieren, insbesondere bei der Verwendung von RGB LEDs. 
Somit kann der Sensoraufbau ohne weitere Umbauten auf eine entsprechende 
Klebstofffarbe umgestellt werden. 

Wenn LEDs in Farbtrippeln aus den Farben Rot, GrQn und Blau verwendet werden, 
kann die am besten geeignete Mischfarbe fOr die optimale Kontrastierung erzeugt 
werden. 

GemafJ einer Ausgestaltung der Erfindung werden die LEDs geblitzt, wobei 
insbesondere Stromimpulse von 1,0 bis 0,01 ms auf die Dioden aufgebracht werden, 
um wahrend des Abfahrens des Sensors uber dem Substrat scharfe Bilder 
insbesondere von der Klebstoffspur zu erhalten. 

Desweiteren ist es fDr eine dreidimensionale Positionskorrektur in bezug auf 
Lagetoleranzen der einzelnen Bauteile bzw. Toleranzen von Fugenahten vorteilhaft, 
wenn die Referenzkontur bzw. ein Merkmal von zumindest zwei Kameras ermittelt 
wird, um eine dreidimensionale Positionskorrektur fur die Auftragseinrichtung mit 
Hilfe des Stereometrieverfahrens durchzufuhren. 

Ferner ist es von Vorteil, wenn die beiden Kameras das Substrat, einen 
Bauteilabschnitt oder ein oder mehrere Bauteile als Vollbild oder GroBbild 
aufnehmen, wobei die Vollbilder oder GroBbilder der beiden Kameras einen 
Oberlappungsbereich in Vorlaufrichtung aufweisen, und wobei die sich im 
Oberlappungsbereich ergebende dreidimensionale Lageerkennung der 
Referenzkontur zur Grobjustierung der Auftragseinrichtung vor dem Aufbringen der 
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Struktur verwendet wird. Dabei wird der Auftragseinrichtung bzw. dem Roboter 
entsprechende Korrekturwerte ubermittelt, um dessen Koordinatensystem fur den 
Klebstoffauftrag zu verschieben. 

Wenn eine Projektion zur dreidimensionaien Auswertung auf den Bereich der 
Referenzkontur aufgebracht wird, insbesondere wenn eine oder mehrere Laserlinien 
als Projektion auf das Substrat aufgebracht werden, dann kann eine 
dreidimensionale Profiiauswertung hinsichtlich der Hohe und der Kontur von 
beliebigen Bauteilen ermoglicht werden, auch wenn diese fur eine ubliche 
Biidbearbeitung ohne zusatzliche Projektion nicht auswertbar ist. 

Vorteilhafterweise wird eine Kalibrierung der einzelnen Kameras vorgenommen, um 
gemad dem Kreiscaliper die Winkelzugehorigkeit der einzelnen Kameras 
vorzunehmen, wobei insbesondere ein Kreisbogen der Kalibriervorrichtung mit 
Markierungsstellen mit 0°, 120° und 240° fur drei Kameras verwendet wird. Dadurch 
kann ein globales Koordinatensystem hinsichtlich der Winkelzugehorigkeit fur die 
einzelnen Kameras auf dem Kreiscaliper um die Auftragseinrichtung herum fur eine 
vereinfachte softwareseitige Bildverarbeitung verwendet werden. 

Daruber hinaus kann der Abstand der Auftragseinrichtung zu einem Bauteilmerkmal 
gemessen werden, beispielsweise zu Bauteilkanten oder Lochem bzw. 
Durchbruchen, um eine Lageprufung der aufgebrachten Struktur durchzufuhren. 
Dabei wird insbesondere zur Abstandsmessung eine linienformige 
Grauwertkantenantastung bzw. linienformige Caliper verwendet, so dass beliebig 
viele Referenzmarken gesetzt werden konnen, wobei die Bildauswertung nicht 
ausschlielilich auf das Kamerabild beschrankt ist, in dem die Kleberspurprufung 
stattfindet. Somit ist es nicht erforderlich, dass die Kleberspur und geeignete 
Referenzmerkmale in demselben Kamerabild zu sehen sind, was insbesondere 
hinsichtlich der parallelen Verarbeitung von drei Kamerabildern vorteilhaft ist. 

Mit vorliegender Erfindung wird eine Vorrichtung zum Erkennen einer auf einem 
Substrat aufzubringenden Struktur, vorzugsweise eine Kleberraupe oder Kleberspur, 
zur Durchfuhrung eines erfindungsgemaSen Verfahrens nach Anspruch 1 bzw. 4 
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bereitgestellt, wobei zumindest ein Beleuchtungsmodui und eine Sensoreinheit 
vorgesehen ist. Die Sensoreinheit ist aus zumindest einer bzw. mehreren Kameras 
aufgebaui, weiche um die Einrichtung zum Auftragen der Struktur vorgesehen und 
angeordnet sind sowie auf die Einrichtung zum Auftragen der Struktur jeweils 
ausgerichtet sind. Dadurch ist es moglich, dass der Verfahrweg der Vorrichtung uber 
einem Substrat bzw. ein Verfahrweg des Substrats bzgl. der Vorrichtung stets in alien 
Richtungen durch die Ausrichtung der Kameras auf die Auftragseinrichtung 
uberwacht werden kann. 

Wenn sich die axiale Langsachse der einzelnen Kameras in Blickrichtung im 
wesentlichen mit der axialen Langsachse der Auftragseinrichtung schneidet, so ist es 
gemaU einer derartigen Weiterbildung vorteilhaft, dass ein enger Bereich um die 
Auftragseinrichtung mit geeigneter Auflosung und hoher Bildaufnahmefrequenz 
uberwacht werden kann. 

GemaB einer bevorzugten Ausfuhrungsform sind einzelne Kameras, insbesondere 3 
Kameras, in Umfangsrichtung in jeweils gleichem Abstand voneinander angeordnet 

Vorteilhafterweise werden die einzelnen Kameras derart verschaltet, dass die Bilder 
der Kameras in einer Bildsequenz gespeichert werden, so dass diese Bilder 
synchron und parallel sowie zugeordnet aufgenommen werden konnen. 

GemaB einer Ausgestaltung einer Erfindung bilden ein oder mehrere Kameras einen 
Kreiscaliper, dessen Mittelpunkt die Auftrageinrichtung der Struktur bildet. Dabei 
konnen ein oder mehrere kreisformige Caliper verwendet werden, die es 
ermoglichen, dass die Ermittlung der Kante der Kleberspur auf einer Kreisbahn 
stattfindet 

Gemaft einer bevorzugten Ausfuhrungsform weisen die einzelnen Kameras einen 
Oberlappungsbereich von jeweils mindestens 10° zur nachsten Kamera auf. Dieser 
Oberlappungsbereich ermoglicht ein vollautomatisches Umschalten von 
benachbarten Kameras, wenn die Klebstoffspur von dem Oberwachungsbereich 
einer Kamera in den nSchsten verlauft, da die Auswahl der Kamera nicht gebunden 
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an die Roboterposition Oder eine zeitliche Komponente gebunden ist, sondern sich 
auf die aktuellen Inspektionsergebnisse bezieht, d.h. auf die Anordnung auf der 
Umlaufbahn bzw. Kreisbahn des Kreiscalipers bzw. auf dem dadurch gebildeten 
globalen Koordinatensystem. 

Ferner ist es von Vorteil, wenn das Beleuchtungsmodul aus LEDs, insbesondere 
Infrarot-LEDs, UV-LEDs Oder RGB-LEDs aufgebaut ist. 

Daruber hinaus ist es von Vorteil, wenn zur Kalibrierung der einzelnen Kameras fur 
die Zuordnung der Winkelzugehorigkeit eine Kalibrierscheibe mit einzelnen 
Formelementen verwendet wird, wobei diese Formelemente insbesondere einen 
Winkelabstand von im wesentlichem 10° aufweisen. Dadurch kann der 
Skalierungsfaktor, die Winkelzugehorigkeit und der Mittelpunkt sowie der Radius des 
Suchkreises fur die einzelnen Kameras zugeordnet werden. ErfindungsgemaB weist 
die Kalibrierscheibe zumindest drei Markierungsstellen auf, die in einem Kreisbogen 
der Kalibrierscheibe von im wesentlichen 0°, 120° und 240° angeordnet sind, urn drei 
Kameras zu kalibrieren. 

Wenn eine Projektionseinrichtung an der Auftragseinrichtung vorgesehen ist, welche 
oder mehrere Merkmale, insbesondere Streifen, auf das Substrat fur die 
dreidimensionale Auswertung projiziert, dann konnen beliebige Bauteile fdr eine 
Korrektur bzw. Justierung der Auftragseinrichtung vor dem Aufbringen der Struktur 
verwendet werden. 

GemaG einer bevorzugten Ausfuhrungsform sendet die Projektionseinrichtung eine 
oder mehrere Laserlinien zur dreidimensionalen Profilauswertung aus. Wenn 
zumindest zwei Projektionseinrichtungen rund urn die Auftragseinrichtung 
angeordnet sind, dann wird eine luckenlose dreidimensionale Auswertung urn die 
Auftragseinrichtung ermoglicht, wobei die Auswertung von Dichtmittelhohe und 
Dichtmittelkontur sowie Lage und Breite nach dem Triangulationsprinzip mitteis 
Bildverarbeitung vorgenommen werden kann. 
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Erfindung sind Gegenstand der ubrigen 



Anhand der nachfolgenden Zeichnungen werden beispielhaft vorteilhafte 
Ausgestaltungen der Erfindung dargestelit. 

Figur 1 zeigt eine schematische Seitenansicht einer erfindungsgemafSen Vorrichtung 
zum Auftragen und Oberwachen einer Klebstoffspur. 

Figur 2 zeigt eine perspektivische Ansicht der erfindungsgemaBen Vorrichtung von 
Figur 1. 

Figur 3 zeigt den Verfahrweg der erfindungsgemaUen Vorrichtung zum Aufbringen 
und Oberwachen einer Klebstoffspur. 

Figur 4 zeigt einen anderen Verfahrweg der erfindungsgema(Sen Vorrichtung bzgl. 
des Umschaltens der relevanten Kameras. 

Figur 5 ist eine Darstellung eines einzigen Bilds, dass aus drei Biidstreifen von drei 
Kameras zur Online-Oberwachung zusammengesetzt ist 

Figur 6 erlautert den prinzipiellen Aufbau der Software. 

Figur 7 zeigt schematisch eine erfindungsgemafce Kalibriervorrichtung zum 
kalibrieren der einzelnen Kameras der erfindungsgemalSen Vorrichtung zum 
Erkennen einer auf einem Substrat aufzubringenden Struktur. 

Fig. 8 stellt eine Draufsicht auf das Substrat mit aufgebrachter Klebstoffspur 
hinsichtlich der AuftragsQberwachung. 

Fig. 9 zeigt eine Draufsicht hinsichtlich der Profilauswertung. 
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lm Weiteren wird nun der Aufbau der erfindungsgemaBen Vorrichtung zum Erkennen 
einer auf einem Substrat aufzubringenden Struktur gemaB den Figuren 1 und 2 
erlautert 

Mit dem Bezugszeichen 10 ist die schematisch dargestellte Vorrichtung zum 
Aufbringen und Erkennen einer Kleberspur gezeigt. Dabei ist im Zentrum der 
erfindungsgema&en Vorrichtung eine Auftragseinrichtung 11 angeordnet, durch 
welche eine Klebstoffspur 20 auf ein Substrat bzw. auf ein Blech 30 in der Fig. 1 von 
rechts nach links aufgebracht wird. Urn die Auftragseinrichtung 1 1 sind in einem 
Kreis drei Kameras 12, 13, 14 in gleichma&igem Abstand angeordnet, die auf die 
Auftragseinrichtung 11 jeweils ausgerichtet sind. Wie aus Figur 1 ersichtlich, 
schneiden sich die axialen Langsachsen der drei Kameras 12, 13, 14 mit der axialen 
Langsachse der Auftragseinrichtung 11 unmittelbar unterhalb des Substrats 30, 
sodass der Fokus der einzelnen Kameras unmittelbar urn den Bereich der 
Auftragseinrichtung 11, insbesondere auf einer Kreisbahn, angeordnet ist. 

Bei der Klebstoffinspektion wird nun entweder die Auftragseinrichtung mit den 
Kameras oder das Substrat verfahren, wobei gleichzeitig die Klebstoffspur 20 auf das 
Substrat 30 mittels der Auftragseinrichtung 11 aufgebracht wird und wobei die 
Kameras 12, 13, 14 die aufgebrachte Struktur uberwachen. Es ist hierzu moglich, die 
Auftragseinrichtung mit den Kameras oder das Substrat zu verfahren, urn die 
Klebstoffspur in einem gewunschten Verlauf auf dem Substrat 30 aufeubringen. 
Dadurch konnen die mitfahrenden Kameras simultan mit dem Auftragen die 
Klebstoffspur unabhangig von dem Verfahrweg uberwachen. In Fig. 2 veriauft die 
Klebstoffspur 20 von links nach rechts, wobei diese als durchgezogene Linie 
dargestellt ist. Rechts von der Auftragseinrichtung 11 ist der beabsichtigte Verlauf der 
Klebstoffspur 20 mit gestrichelter Linie angezeigt. 

Figur 3 zeigt nun den Verlauf der Klebstoffspur 20, welcher mittels Pfeilen angezeigt 
wird, wobei an drei Stellen die Ausrichtung bzw. der Sichtbereich der einzelnen drei 
Kameras dargestellt ist. Die Sichtbereiche der einzelnen drei Kameras sind jeweils 
durch ein Rechteck mit durchgezogener Linie, ein Rechteck mit weit gestrichelten 
Linien und ein Rechteck mit eng gestrichelten Linien dargestellt. Wie aus der Figur 
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ersichtlich bleibt die Ausrichtung der einzelnen Sichtbereiche stets konstant 
ausgerichtet, wobei lediglich die gesamte Vorrichtung verfahren wird. 

Figur 4 zeigt einen weiteren Verlauf einer Klebstoffspur 20, wobei jeweils angezeigt 
ist, welcher Sichtbereich aktiv ist, d.h. welche Kamera mit dem entsprechenden als 
Rechteck dargestellten Sichtbereich beim Abfahren der Klebstoffspur aktiv ist. 

In Figur 5 sind nun drei Bildstreifen dargestellt, die jeweils einen relevanten 
Bildausschnitt bzw. Bildstreifen der einzelnen drei Kameras von Figur 1 darstellen. 
GemalJ dem erfindungsgemaften Verfahren wird von jeder Kamera lediglich ein 
Streifen des Bildes aufgenommen, urn fGr eine entsprechende Datenverminderung 
zu sorgen, sodass die Aufnahmefrequenz erhoht werden kann. Diese einzelnen 
Bildstreifen der drei Kameras werden zu einem Bild zusammengefdgt, wobei die 
Bildaufnahmen in definierten festen ZeitabstSnden und unabhSngig von der 
Robotersteuerung fur die Auftragseinrichtung erfolgen. Beispielsweise nehmen die 
Kameras lediglich einen Steifen des Bildes auf, wobei an Stelle einer Bildhohe von 
480 Bildpunkten eine Bildhohe von rund 100 Bildpunkten (100 Bildzeilen) verwendet 
wird. Durch diese Partial-Scan-Technik, d.h. ein teilweises Auslesen des 
Bildaufnahmechips, entstehen nur geringe Datenstrome, so dass die 
Bildaufnahmefrequenz um das entsprechende vielfache erhoht werden kann. Bei der 
Auswertung der Daten ist es somit moglich, dass die Bilder der einzelnen Kameras 
synchron und parallel und folglich gleichzeitig erfasst werden konnen und 
anschliefiend zu einem einzigen Bild zusammengefOgt werden, wobei die drei 
Bildstreifen untereinander angeordnet werden. Als Folge davon sind die drei Bilder, 
d.h. die drei Bildstreifen, sofort hinsichtlich des Ortes und der Zeit zueinander richtig 
angeordnet sowie zugeordnet und konnen entsprechend verarbeitet werden. Diese 
spezielle Bildaufnahmetechnik ermoglicht somit das gleichzeitige und parallele 
aufnehmen einzelner Kamerabilder, wodurch es moglich wird, dass beim Einlernen 
einer Referenzauftragsstruktur lediglich ein einmaliges Abfahren dieser Struktur 
vorgenommen werden muss, wobei die Bilder alter Kameras in einer Bildsequenz 
gespeichert werden. 



WO 2005/063406 PCTAEP20ti4/01 4f»9K 

Wenn die Bilder der drei Kameras in einer Bildsequenz gespeichert worden sind, wird 
beim Einiemen der Referenzkleberspur anschlie&end eine Parametrierung dieser 
Referenzspur durchgefuhrt. Fur die Parametrierung wird der Roboterverfahrweg, die 
Roboterverfahrzeit, die Richtung, die Breite und die Gute der Kiebespur verwendet. 
Somit ergibt sich fur die Kleberspur eine Art Vektorkette, wodurch es moglich ist, die 
hohe Bildaufnahmefrequenz und die vergleichsweise kurzen Teilabschnitte 
(zwischen 1 und 3 mm) zu erzielen. Die Vektorvisierung hat ferner den Vorteil, dass 
die Kleberspur in Form einer Vektorkette in einem kameraubergreifenden, globalem 
Koordinatensystem abgelegt werden kann. 

Wie aus dem untersten Streifen von Figur 5 ersichtlich, ist urn das Zentrum der 
Auftragseinrichtung 11 eine Kreisbahn angeordnet, wobei die beiden Kantenpunkte 
21 und 22 der Klebstoffspur 20 auf der Kreisbahn angeordnet sind. Diese Kreisbahn 
ist derart unterteilt, dass einer ersten Kamera ein Winkelbereich von -10° bis 130°, 
einer zweiten Kamera ein Winkelbereich von 110° bis 250° und 'einer dritten Kamera 
ein Winkelbereich von 230° bis -10° zugeordnet wird, sodass eine luckenlose 
Abdeckung mit Oberlappungsbereichen der einzelnen Kameras urn die 
Auftragseinrichtung 11 herum ermoglicht wird. Daraus ergibt sich fur die drei 
Bildstreifen ein globales Koordinatensystem, welches sowohl kartesisch als auch 
polar ausgefuhrt sein kann. 

Falls die Kleberspur nun aus dem Sichtbereich einer Kamera lauft, befindet sich die 

♦ 

Kleberspur ubergangsweise im Oberlappungsbereich der Winkelbereiche der beiden 
Kameras. Wenn nun die Kleberspur von dem Segment der Kreisbahn der einen 
Kamera uber den Oberlappungsbereich in das Segment der Kreisbahn einer anderen 
Kamera verlauft, wird von der einen zur anderen Kamera automatisch umgeschaltet. 
Dies ist insbesondere in Figur 4 durch die aktiven Sichtbereiche der einzelnen 
Kameras dargestelit 

Die obigen Vorteile werden dadurch erzielt, dass die einzelnen Kameras einen 
Kreiscaliper bilden, dessen Mittelpunkt die Auftrageinrichtung 11 bildet, wobei die 
Suche nach den Kanten 21, 22 der Klebstoffspur auf einer Kreisbahn unmittelbar urn 
die Auftragseinrichtung erfolgt. Hierzu ist es wesentlich, dass die einzelnen Kameras 
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auf die Auftragseinrichtung ausgerichtet sind, wobei sich die axialen Langsachsen 
der einzelnen Kameras mit der Langsachse der Auftragseinrichtung schneiden. 

Im Folgenden wird nun eine Teach-ln-Lauf bzw. ein Einlernen einer 
Referenzkleberspur erlautert 

Der Einlernvorgang der Referenzkleberspur kann mittels eines Mausklicks vom 
Bediener auf die Spur begonnen werden, wodurch die Lage der Kleberspur 
angezeigt wird. Dies ist ausreichend, um in den nachsten Kamerabildern die Position 
und Richtung der Kleberspur vol! automatisch zu erkennen, da die 
Bildaufnahmefrequenz entsprechend hoch ist und die einzelnen Bildaufnahmen sehr 
kurz hintereinander stattfinden, beispielsweise alle 1 mm bis 3 mm. Ab dem 
Startpunkt findet Bild fur Bild die Kleberantastung statt, wobei die im aktuellen Bild 
gefundene Kleberspurposition und Kleberspurwinkel als A-Priori-Wissen fQr das 
kommende Bild verwendet wird. Da die Spurradien zumeist grolier als 20 mm 
betragen, wird somit das vollautomatische Erfassen der Kleberspur moglich, ohne 
dass ein Mensch das Bild bzw. die Lage der Kleberspur ermitteln bzw. bewerten 
muss. Als Folge davon kann der Suchbereich eingeschrankt werden, wodurch mittels 
der hohen Bildaufnahmefrequenz errechnet werden kann, wo die Kleberspur im 
wesentlichen im nSchsten Bild verlaufen wird. 

In Figur 6 ist der prinzipielle Aufbau der Software dargestellt, wobei der Teach-ln- 
Lauf bzw. Einlernlauf die Bildsequenz erzeugt, welche daraufhin die automatische 
Parametrisierung ermoglicht. Diese Parametrisierung kann gegebenenfalls vom 
Benutzer voreingestellt werden und wird for den Inspektionslauf zusammen mit 
einem Verlaufs-file fur die Inspektion einer aufgebrachten Klebstoffspur verwendet. 

Die Onlineuberwachung einer aufgebrachten Klebstoffspur wird nun kurz erlautert. 
Die in Figur 1 gezeigte Auftragseinrichtung 11 bringt die Klebstoffspur auf das Blech 
30 auf, wobei die Auftragseinrichtung 11 mit den Kameras Qber dem Blech 30 
verfahren wird. Jedoch ist auch eine kinematische Umkehr mOglich, d.h., dass das 
Blech 30 verfahren wird und die Auftragseinrichtung mit den Kameras ortsfest 
angeordnet ist. Die aufgetragene Klebstoffspur 20 wird synchron und parallel von 
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den Kameras 12, 13, 14 auf der gemaB Figur 5 erlauterien Kreisbahn des 
Kreiscalipers ermittelt und ausgewertet, wobei von jeder Kamera jeweils lediglich ein 
Streifen des Bildes aufgenommen wird und in einem einzigen Bild unter Bildung einer 
Bildsequenz zusammengefugt wird. Entsprechend der Datenverminderung durch die 
Aufnahme von lediglich einem Streifen des Bildes jeder Kamera wird die 
Bildaufnahmefrequenz erheht, wobei die einzelnen Bildstreifen in dem 
zusammengefugten Bild das synchrone und paralleie sowie gleichzeitige Erfassen 
der drei Kamerabilder ermoglichen und wobei die einzelnen Bilder der drei Kameras 
unmittelbar ortsabhangig zugeordnet werden konnen. Somit wird eine 
Onlineuberprufung der Klebstoffspur in Echtzeiten moglich, welche durch die hohe 
Bildaufnahmefrequenz sowohl beim Einlemen einer Referenzkleberspur als auch 
beim OberprQfen der aufgebrachten Kleberspur eine hohe Genauigkeit bei hohen 
Verfahrgeschwindigkeiten erzielt. Hierbei sind die Informationen Qber die 
Klebstoffspur im Klebersuchbereich, die Winkelzuordnung des Sensors, die 
Kleberbewertung, der Roboterverfahrweg und die Roboterverfahrzeit in einer 
Verlaufsliste zusammen gefasst 

GemaB einer AusfOhrungsform der vorliegenden Erfindung kann eine 
Bewertungsfunktion zum Auffinden der Kanten der Klebstoffspur, insbesondere eine 
Fuzzy-Bewertung, verwendet werden. Urn die Klebstoffspur zu ermitteln und zu 
bewerten, werden mittels einer Fuzzy-Bewertung folgende Parameter miteinander 
verrechnet: 

Breite des Kantenpaares (Kantel: linke Kante der Klebstoffspur, Kante 2: rechte 
Kante der Kleberspur), mittlerer Grauwert des projizierten Grauwertprofils zwischen 
dem Kantenpaar, Randkontrast (geometrischer Mittelwert der Amplituden der beiden 
Kanten) und Positionsverlauf (gerichtete Abweichung des Mittelpunkts zwischen den 
beiden Kleberkanten vom Mittelpunkt des Suchbereichs in Pixel). Durch diese 
Vielzahl an Parametern kann, auch mit Hilfe der Fuzzy-Bewertungsfunktion, die 
Klebstoffspur sehr genau beschrieben werden, damit diese sicher automatisch 
erkannt wird. 
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For die erfindungsgema&e Vorrichtung ist das nicht gezeigte Beleuchtungsmodul aus 
LEDs, insbesondere Infrarot-LEDs, UV-LEDs oder RGB-LEDs, aufgebaut. Urn hohe 
Kontraste bei der Bildaufnahme zu erhalten, konnen die LEDs geblitzt werden, d.h. } 
dass kurze, starke Stromimpulse auf die Dioden im Bereich von 1,0 bis 0,01 ms 
aufgebracht werden. Dabei sind insbesondere derartige Leuchtdioden vorteilhaft, die 
verschiedenfarbiges Licht emittieren konnen, sodass der Sensoraufbau ohne 
Umbauten auf andere Klebertypen bzw. Kleberfarben umgestellt werden kann. 

Figur 7 zeigt eine Kalibriereinrichtung 40 in Form einer kreisformigen 
Kalibrierscheibe, urn den einzelnen Kameras ihren Skalierungsfaktor, ihre 
Winkelzugehorigkeit und den Mittelpunkt sowie den Radius des Suchkreises 
zuzuordnen. Die Kalibrierscheibe besteht aus einzelnen auf einer Kreisbahn 
angeordneten Formelementen bzw. Dots 41, die jeweils in einem Winkelabstand von 
einem im wesentlichen 10° angeordnet sind. In gleichmalligen Abstand voneinander 
sind ferner Markierungsstellen 42 angeordnet, urn drei Kameras zu kalibrieren. 
Mittels einer Ausgleichsrechnung wird aus den Koordinaten der Mittelpunkte der 
einzelnen Dots zum einen der Skalierungsfaktor der einzelnen Kameras zum 
anderen der Mittelpunkt sowie der Radius des Suchbereichs berechnet. Durch die 
Markierungsstellen im Winkel von 0°, 120°, 240° im globalem Koordinatensystem 
kann die Winkelzuordnung und der jeweilige Sichtbereich der einzelnen Kameras 
bestimmt werden. Der Sichtbereich der einzelnen Kameras ist insbesondere durch 
die drei Rechtecke in Figur 7 dargestellt, wobei die Formelemente 41 der Kreisbahn 
des Kreiscalipers zur Erfassung der Klebstoffspur entsprechen konnen. 

In Fig. 8 ist die Auftragseinrichtung 11 dargestellt, wobei jeweils in Strichpunktlinie 
die Streifen 31, 32 und 33 urn die Auftragseinrichtung 11 dargestellt, welche den 
Auslesebereich der einzelnen Kameras darstellen. Die Klebstoffspur 20 wird dabei im 
Oberiappungsbereich der Streifen 32 und 33 uberwacht, so dass diese beiden 
Kameras aktiv sind. Wenn sich der Verlauf der Klebstoffspur im Verhaltnis zur 
Auftragseinrichtung 11 andert, so wird gegebenenfalls lediglich eine der beiden 
Kameras aktiv, wobei hierzu ein nicht dargestellter im wesentlichen kreisformiger 
Caliper verwendet wird, der um die Auftragseinrichtung 11 konzentrisch angeordnet 
ist. 
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Gemaft dieser Ausfuhrungsform wird der Kreiscaliper durch mehrere Kameras 
gebildet, welche um die Auftragseinrichtung angeordnet sind, jedoch insbesondere in 
einem unterschiedlichen Radius von dem Mittelpunkt der Auftragseinrichtung 
angebracht sein konnen. Zur Inspektion einer Auftragsstruktur bzw. Kleberspur 
werden die Kameras auf einen Kreis bzw. eine Kreisbahn ausgerichtet, dessen 
Mittelpunkt mit dem Mittelpunkt der Auftragseinrichtung ubereinstimmt. Auf dieser 
Kreisbahn findet die oben erlauterte optische Erfassung der Kleberspur statt. 

GemaB Figur 9 wird nun die dreidimensionale Profilauswertung mit Hilfe einer 
Projektion beschrieben, um fur eine Positionskorrektur der Auftragseinrichtung zu 
sorgen. In Fig. 9 sind aus ObersichtlichkeitsgrCinden wiederum nur zwei 
Kamerasichtfelder 51, 52 gestrichelt dargestellt Im Oberlappungsbereich der beiden 
Kamerasichtfelder 51, 52 sind eine Vielzahl von Laseriinien 60 dargesteilt, welche zur 
Profilauswertung hinsichtlich der Hohe und der Kontur von Strukturraupen und auf 
die Erzeugung von sogenannten Softkonturen verwendet werden. Die Laseriinien 60 
werden von einer Projektionseinrichtung erzeugt, welche beispielsweise an dem 
optischen Sensor mit drei Kameras angeordnet sein kann. Ferner kann die 
Projektionseinrichtung jedoch auch unmittelbar an der Auftragseinrichtung 11 
angeordnet sein. Der Sensor mit den drei Kameras ist schematisch durch den Kreis 
70 dargestellt. Durch die auf das Bauteil 30 bzw. Blech 30 projizierten Laseriinien 
bzw. Laserstreifen werden Konturen auf dem Bauteil hervorgehoben, die mit Qblicher 
Bildverarbeitung fur die dreidimensionale Auswertung nicht verwendbar sind. Mit 
Hilfe der Laseriinien auf dem Bauteil werden kunstliche Merkmale erzeugt die dann 
mittels der Bildverarbeitung gemafc der Stereometrie ausgewertet werden konnen,. 
Somit zeigt Figur 9 das Prinzip der dreidimensionalen Lageerkennung vor dem 
Dichtmittelauftrag, falls keine harten, auswertbaren Merkmale vorhanden sind. 

Somit wird ein Verfahren bzw. eine Vorrichtung zum Erkennen einer auf einem 
Substrat aufzubringenden Struktur, vorzugsweise eine Kleberraupe oder Kleberspur, 
mit mindestens einer Kamera, insbesondere mehreren Kameras beschrieben. Dabei 
wird das Einlernen einer Referenzauftragsstruktur durch lediglich ein einmaliges 
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Abfahren dieser Referenzauftragsstruktur derart vorgenommen, dass die Bilder aller 
Kameras in einer Bildsequenz gespeichert werden. 

Ferner wird ein Verfahren zum Erkennen einer auf einem Substrat aufzubringenden 
Struktur beschrieben, wobei die aufgebrachte Stmktur beim Abfahren fur die 
Bewertung der Struktur derart als optisches Abbild verarbeitet wird, dass von jeder 
Kamera lediglich ein Streifen des Bildes unter Bildung einer Bildsequenz 
aufgenommen wird und die Bildaufnahmefrequenz entsprechend der 
Datenverminderung durch die Aufnahme von lediglich einem Streifen des Bildes 
erhoht wird. 
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Anspriiche 



Verfahren zum Erkennen einer auf einem Substrat aufzubringenden 
Struktur, vorzugsweise eine Kieberraupe Oder Kieberspur, mit mindestens 
einer Kamera, insbesondere mehreren Kameras, dadurch gekennzeichnet, 
dass das Einiernen einer Referenzauftragsstruktur durch lediglich ein 
einmaiiges Abfahren dieser Referenzauftragsstruktur derart vorgenommen 
wird, dass die Bilder aller Kameras in einer Bildsequenz gespeichert 
werden. 

Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass von jeder 
Kamera lediglich ein Streifen des Biides unter Bildung eines Teils der 
Bildsequenz aufgenommen wird. 

Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass die 
Bildaufnahmefrequenz entsprechend der Datenverminderung durch die 
Aufnahme von lediglich einem Streifen des Biides erhoht wird. 

Verfahren zum Erkennen einer auf einem Substrat aufzubringenden 
Struktur, vorzugsweise einer Kieberraupe oder Kieberspur, mit mindestens 
einer Kamera, insbesondere mehreren Kameras, dadurch gekennzeichnet, 
dass die aufgebrachte Struktur beim Abfahren fur die Bewertung der 
Struktur derart als optisches Abbild verarbeitet wird, dass von jeder 
Kamera lediglich ein Streifen des Biides unter Bildung einer Bildsequenz 
aufgenommen wird und die Bildaufnahmefrequenz entsprechend der 
Datenverminderung durch die Aufnahme von lediglich einem Streifen des 
Biides erhoht wird. 

Verfahren nach zumindest einem der Anspruche 2 bis 4, dadurch 
gekennzeichnet, dass die Bildstreifen der einzelnen Kameras zu einem 
einzigen Bild zusammengefugt werden. 
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6. Verfahren nach zumindest einem der Anspruche 2 bis 5, dadurch 
gekennzeichnet, dass pro Kamera in etwa nur 1/4 der Bildzeiien als 
Streifen des Bildes verwendet werden und die Bildaufnahmefrequenz 
vervierfacht wird. 

7. Verfahren nach zumindest einem der vorhergehenden AnsprOche, dadurch 
gekennzeichnet, dass die Parametrierung der von der 
Referenzauftragsstruktur erhaltenen Bildsequenz, welche aus einem 
einzigen Bildaufnahmelauf aller Kameras resultiert, automatisch durch ein 
einmaliges externes Anzeigen der Referenzauftragsstruktur vorgenommen 
wird und zum Vergleich mit einer aufgebrachten Kleberspur verwendet 
wird. 

8. Verfahren nach Anspruch 7, dadurch gekennzeichnet, dass fur die 
Parametrierung der Roboterverfahrweg, die Roboterverfahrzeit, die 
Richtung, die Breite und die Gate der Kleberspur verwendet wird. 

9. Verfahren nach zumindest einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass eine Bewertungsfunktion, insbesondere eine Fuzzy- 
Bewertung, zum Auswerten der Klebstoffepur verwendet wird. 

10. Verfahren nach Anspruch 9, dadurch gekennzeichnet, dass die Breite des 
Kantenpaares der rechten und linken Kante der Kleberspur, der mittlere 
Grauwert des projizierten Grauwertprofils zwischen dem Kantenpaar, der 
Randkontrast und der Positionsverlauf mittels der Bewertungsfunktion 
verrechnet werden. 

11. Verfahren nach zumindest einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass die Kanten der Kleberspur auf einer umlaufenden 
Bahn, insbesondere im wesentlichen einer Kreisbahn in Form eines 
kreisformigen Calipers, ermittelt werden, wobei innerhalb der umlaufenden 
Bahn die Kleberspur verlauft. 
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12. Verfahren nach Anspruch 11, dadurch gekennzeichnet, dass der 
Mittelpunkt der Kreisbahn oder das Zentrum der umlaufenden Bahn irn 
wesentlichen mit der Stelle ubereinstimmt, aus welcher der Kleber zur 
Bildung der Kleberspur austritt. 

13. Verfahren nach Anspruch 11 oder 12, dadurch gekennzeichnet, dass jede 
Kamera zumindest ein Segment des aus der Kreisbahn gebildeten Kreises 
oder der Umlaufbahn uberwacht 

14. Verfahren nach Anspruch 13, dadurch gekennzeichnet, dass jede Kamera 
zumindest einen Oberlappungsbereich mit zumindest einer angrenzenden 
Kamera uberwacht 

15. Verfahren nach einem der Anspruche 11 bis 14, dadurch gekennzeichnet, 
dass die Winkelwerte der Kreisbahn von 0 bis 360° ein globales 
Koordinatensystem bilden, wobei den Bildem der einzelnen Kameras ein 
Segment der Kreisbahn zugeordnet wird. 

16. Verfahren nach einem der Anspruche 11 bis 15, dadurch gekennzeichnet, 
dass eine erste Kamera mindestens einen Winkelbereich von -10° bis 
130°, eine zweite Kamera mindestens einen Winkelbereich von 110° bis 
250° und eine dritte Kamera mindestens einen Winkelbereich von 230° bis 
10° abdeckt. 

17. Verfahren nach einem der Anspruche 11 bis 16, dadurch gekennzeichnet, 
dass bei dem Verlauf der Kleberspur von einer Kamera zur nachsten 
automatisch umgeschaltet wird, wenn die Kleberspur von dem Segment 
der Kreisbahn oder der Umlaufbahn einer Kamera uber den 
Oberlappungsbereich in das Segment der Kreisbahn einer anderen 
Kamera verlauft. 

18. Verfahren nach zumindest einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass zur Beleuchtung LED-Leuchtmittel verwendet 
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werden, welche eine Lichtfarbe umfassen, die einen geeigneten Kontrast 
zur Farbe der Auftragsstruktur aufweist. 

19. Verfahren nach Anspruch 18, wobei Infrarot-LEDs Oder UV-LEDs 
verwendet werden. 

20. Verfahren nach Anspruch 18 Oder 19, dadurch gekennzeichnet, dass 
Leuchtdioden verwendet werden, insbesondere RGB-LEDs. 

21. Verfahren nach einem der vorhergehenden Anspruche 18 bis 20, dadurch 
gekennzeichnet, dass LEDs in Farbtripeln aus den Farben rot, grun und 
blau verwendet werden. 

22. Verfahren nach einem der Anspruche 18 bis 21, dadurch gekennzeichnet, 
dass die LEDs geblitzt werden, wobei insbesondere Stromimpulse von 1,0 
bis 0,01 ms auf die Dioden aufgebracht werden. 

23. Verfahren nach einem der vorhergehenden Anspruche 1 bis 22, wobei eine 
Referenzkontur von zumindest zwei Kameras ermittelt wird, urn eine 
dreidimensionale Positionskorrektur fur die Auftragseinrichtung mit Hilfe 
des Stereometrieverfahrens durchzufuhren. 

24. Verfahren nach Anspruch 23, dadurch gekennzeichnet, dass die beiden 
Kameras das Substrat, einen Bauteilabschnitt oder ein oder mehrere 
Bauteile als Vollbild oder GroBbild aufnehmen, wobei die Vollbilder oder 
Grofcbilder der beiden Kameras einen Oberlappungsbereich ergebende 
dreidimensionale Lageerkennung der Referenzkontur zur Justierung der 
Auftragseinrichtung vor dem Aufbringen der Struktur verwendet wird. 

25. Verfahren nach einem der Anspruche 23 oder 24, dadurch 
gekennzeichnet, dass eine Projektion zur dreidimensionalen Auswertung 
auf den Bereich der Referenzkontur aufgebracht wird, insbesondere eine 
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Oder mehrere Laserlinien als Projektion auf das Substrat aufqebracht 
werden. 

26. Verfahren nach einem der Anspruche 1 bis 25, dadurch gekennzeichnet, 
dass eine Kalibrierung der einzelnen Kameras zur Zuordnung der 
Winkelzugehorigkeit vorgenommen wird, wobei insbesondere ein 
Kreisbogen der Kaiibriervorrichtung mit Markierungsstellen mit 0°, 120° 
und 240° fur drei Kameras verwendet wird. 

27. Verfahren nach einem der Anspruche 1 bis 26, dadurch gekennzeichnet, 
dass der Abstand der Einrichtung zum Auftragen der Struktur zu einem 
Bauteilmerkmal gemessen wird, urn eine LageprQfung der aufgebrachten 
Struktur durchzufuhren, wobei zur Abstandsmessung insbesondere eine 
linienformige Grauwertkantenantastung verwendet wird. 

28. Vorrichtung zum Erkennen einer auf einem Substrat aufzubringenden 
Struktur, vorzugsweise eine Kleberraupe Oder Kleberspur, zur 
Durchfuhrung eines Verfahrens gemalS den Anspruchen 1 bis 27, wobei 
zumindest ein Beleuchtungsmodul und eine Sensoreinheit vorgesehen ist, 
dadurch gekennzeichnet, dass die Sensoreinheit aus mindestens einer 
Kamera, insbesondere mehreren Kameras, aufgebaut ist, wobei die 
Kameras urn die Einrichtung zum Auftragen der Struktur vorgesehen sind 
und an dieser derart angeordnet sind, dass die Kameras jeweils auf die 
Einrichtung zum Auftragen der Struktur ausgerichtet sind. 

29. Vorrichtung nach Anspruch 28, dadurch gekennzeichnet, dass sich die 
axiale Langsachse der einzelnen Kameras in Blickrichtung im wesentlichen 
mit der axialen LSngsachse der Auftragseinrichtung schneidet. 

30. Vorrichtung nach Anspruch 28 oder 29, dadurch gekennzeichnet, dass die 
einzelnen Kameras, insbesondere drei Kameras, in Umfangsrichtung in 
jeweils gleichem Abstand voneinander angeordnet sind. 
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31. Vorrichtung nach einem der AnsprOche 28 bis 30, dadurch 
gekennzeichnet, dass die einzelnen Kameras derart verschaltet werden, 
dass die Bilder aller Kameras in einer Bildsequenz gespeichert werden. 

32. Vorrichtung nach Anspruch 31, dadurch gekennzeichnet, dass von jeder 
Kamera iediglich ein Streifen des Bildes unter Biidung eines Teils der 
Bildsequenz aufgenommen wird. 

33. Vorrichtung nach Anspruch 32, dadurch gekennzeichnet, dass die 
Bildaufnahmefrequenz entsprechend der Datenverminderung durch die 
Aufnahme von Iediglich einem Streifen des Bildes erhoht wird. 

34. Vorrichtung nach Anspruch 32 und/oder 33, dadurch gekennzeichnet, dass 
die Bildstreifen der einzelnen Kameras zu einem einzigen Bild 
zusammengefugt werden, urn eine Referenzauftragsstruktur einzulernen 
und mit einer aufgebrachten Kleberspur zu vergleichen. 

35. Vorrichtung nach einem der AnsprOche 28 bis 34, dadurch 
gekennzeichnet, dass eine Oder mehrere Kameras zumindest einen im 
wesentlichen kreisformigen Caliper oder umlaufenden Caliper bilden, 
dessen Mittelpunkt oder Zentrum im wesentlichen die Einrichtung zum 
Auftragen der Struktur bildet, wobei insbesondere die Kameras auf einen 
Kreis urn die Auftragseinrichtung ausgerichtet sind, dessen Mittelpunkt im 
wesentlichen mit dem Mittelpunkt der Auftragseinrichtung ubereinstimmt. 

36. Vorrichtung nach einem der AnsprOche 28 bis 35, dadurch 
gekennzeichnet, dass die einzelnen Kameras einen Oberlappungsbereich 
von jeweils mindestens 10°, insbesondere 30° bis 90°, zur nachsten 
Kamera aufweisen. 

37. Vorrichtung nach einem der vorhergehenden AnsprOche 28 bis 36, 
dadurch gekennzeichnet, dass das Beleuchtungsmodul aus LEDs, 
insbesondere infrarot-LEDs, UV-LEDs oder RGB-LEDs aufgebaut ist. 
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38. Vorrichtung nach Anspajch 37, dadurch gekennzeichnet, dass die LEDs 
geblitzt werden, wobei Stromimpulse von 1,0 bis 0,01 ms verwendet 
werden. 

39. Vorrichtung nach einem Anspruche 28 bis 38, dadurch gekennzeichnet, 
dass zur Kaiibrierung der einzelnen Kameras fur die Zuordnung der 
Winkeizugehorigkeit eine • Kalibriervorrichtung mit einzelnen 
Formelementen verwendet wird, wobei die Formelemente insbesondere 
einen Winkelabstand von im wesentlichem 10° aulweisen. 

40. Vorrichtung nach Anspruch 39, dadurch gekennzeichnet, dass die 
Kalibriervorrichtung zumindest drei Markierungsstellen aufweist, die in 
einem Kreisbogen der Kalibriervorrichtung von im wesentiichen 0°, 120° 
und 240° angeordnet sind, urn drei Kameras zu kalibrieren. 

41. Vorrichtung nach Anspruch 40, dadurch gekennzeichnet, dass sich die 
Markierungsstellen auf der Kreisbahn in einem Winkelbereich von jeweils 
im wesentiichen 10° erstrecken, wobei die Markierungsstellen 
insbesondere durch zumindest zwei Formelemente gebildet werden. 

42. Vorrichtung nach einem der Anspruche 28 bis 41, dadurch 
gekennzeichnet, dass eine Projektionseinrichtung an der 
Auftragseinrichtung vorgesehen ist, welche einen oder mehrere Merkmale, 
insbesondere Streifen, auf das Substrat for eine dreidimensionale 
Auswertung projiziert. 

43. Vorrichtung nach Anspruch 42, dadurch gekennzeichnet, dass die 
Projektionseinrichtung eine oder mehrere Laserlinien zur 
dreidimensionalen Profilauswertung aussendet. 



-25- 



Anmelder QUISS GmbH 

Anwaltsakte: QU01H10/P-WO2 



1. Verfahren zum Erkennen einer auf einem Substrat aufzubringenden Struk- 
tur, vorzugsweise eine Kleberraupe Oder Kleberspur, mit mindestens einer 
Kamera, insbesondere mehreren Kameras, dadurch gekennzeichnet, dass 
das Einlernen einer Referenzauftragsstruktur durch lediglich ein einmaliges 
Abfahren dieser Referenzauftragsstruktur derart vorgenommen wird, dass 
die Bilder aller Kameras in einer Bildsequenz gespeichert werden, dadurch 
gekennzeichnet, dass von jeder Kamera lediglich ein Streifen des Bildes 
unter Bildung eines Teils der Bildsequenz aufgenommen wird. 

2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Bildauf- 
nahmefrequenz entsprechend der Datenverminderung durch die Aufnahme 
von lediglich einem Streifen des Bildes erhoht wird. 

3. Verfahren zum Erkennen einer auf einem Substrat aufzubringenden Struk- 
tur, vorzugsweise einer Kleberraupe Oder Kleberspur, mit mindestens einer 
Kamera, insbesondere mehreren Kameras, dadurch gekennzeichnet, dass 
die aufgebrachte Struktur beim Abfahren fur die Bewertung der Struktur 
derart als optisches Abbild verarbeitet wird, dass von jeder Kamera ledig- 
lich ein Streifen des Bildes unter Bildung einer Bildsequenz aufgenommen 
wird und die Bildaufnahmefrequenz entsprechend der Datenverminderung 
durch die Aufnahme von lediglich einem Streifen des Bildes erhoht wird. 

4. Verfahren nach zumindest einem der Anspruche 1 bis 3, dadurch gekenn- 
zeichnet, dass die Bildstreifen der einzelnen Kameras zu einem einzigen 
Bild zusammengefugt werden. 
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5. Verfahren nach zumindest einem der Anspruche 1 bis 4, dadurch gekenn- 
zeichnet, dass pro Kamera in etwa nur 1/4 der Bildzeilen als Streifen des 
Bildes verwendet werden und die Bildaufnahmefrequenz vervierfacht wird. 

6. Verfahren nach zumindest einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass die Parametrierung der von der Referenzauftrags- 
struktur erhaltenen Bildsequenz, welche aus einem einzigen Bildaufnahme- 
lauf aller Kameras resultiert, automatisch durch ein einmaliges externes 
Anzeigen der Referenzauftragsstruktur vorgenommen wird und zum Ver- 
gleich mit einer aufgebrachten Kleberspur verwendet wird. 

7. Verfahren nach Anspruch 6, dadurch gekennzeichnet, dass for die Para- 
metrierung der Roboterverfahrweg, die Roboterverfahrzeit, die Richtung, 
die Breite und die GQte der Kleberspur verwendet wird. 

8. Verfahren nach zumindest einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass eine Bewertungsfunktion, insbesondere eine Fuzzy- 
Bewertung, zum Auswerten der Klebstoffspur verwendet wird. 

9. Verfahren nach Anspruch 8, dadurch gekennzeichnet, dass die Breite des 
Kantenpaares der rechten und linken Kante der Kleberspur, der mittlere 
Grauwert des projizierten Grauwertprofils zwischen dem Kantenpaar, der 
Randkontrast und der Positionsverlauf mittels der Bewertungsfunktion ver- 
rechnet werden. 

10. Verfahren nach zumindest einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass die Kanten der Kleberspur auf einer umlaufenden 
Bahn, insbesondere im wesentlichen einer Kreisbahn in Form eines kreis- 
formigen Calipers, ermittelt werden, wobei innerhalb der umlaufenden 
Bahn die Kleberspur veriauft. 
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11. Verfahren nach Anspruch 10, dadurch gekennzeichnet, dass der Mittel- 
punkt der Kreisbahn oder das Zentrum der umlaufenden Bahn im wesentli- 
chen mit der Stelle ubereinstimmt, aus welcher der Kleber zur Bildung der 
Kleberspur austritt 

12. Verfahren nach Anspruch 10 Oder 11, dadurch gekennzeichnet, dass jede 
Kamera zumindest ein Segment des aus der Kreisbahn gebildeten Kreises 
oder der Umlaufbahn uberwacht. 

13. Verfahren nach Anspruch 12, dadurch gekennzeichnet, dass jede Kamera 
zumindest einen Oberlappungsbereich mit zumindest einer angrenzenden 
Kamera uberwacht. 

14. Verfahren nach einem der AnsprQche 10 bis 13, dadurch gekennzeichnet, 
dass die Winkelwerte der Kreisbahn von 0 bis 360° ein globales Koordina- 
tensystem bilden, wobei den Bildern der einzelnen Kameras ein Segment 
der Kreisbahn zugeordnet wird. 

15. Verfahren nach einem der AnsprQche 10 bis 14, dadurch gekennzeichnet, 
dass eine erste Kamera mindestens einen Winkelbereich von -10° bis 
130°, eine zweite Kamera mindestens einen Winkelbereich von 110° bis 
250° und eine dritte Kamera mindestens einen Winkelbereich von 230° bis 
10° abdeckt. 

16. Verfahren nach einem der AnsprQche 10 bis 15, dadurch gekennzeichnet, 
dass bei dem Verlauf der Kleberspur von einer Kamera zur nachsten au- 
tomatisch umgeschaltet wird, wenn die Kleberspur von dem Segment der 
Kreisbahn oder der Umlaufbahn einer Kamera Qber den Oberlappungsbe- 
reich in das Segment der Kreisbahn einer anderen Kamera verlauft. 
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17. Verfahren nach zumindest einem der vorhergehenden Anspruche, dadurch 
gekennzeichnet, dass zur Beleuchtung LED-Leuchtmittel verwendet wer- 
den, welche eine Lichtfarbe umfassen, die einen geeigneten Kontrast zur 
Farbe der Auflragsstruktur aufweist. 

18. Verfahren nach Anspruch 17, wobei Infrarot-LEDs Oder UV-LEDs verwen- 
det werden. 

19. Verfahren nach Anspruch 17 Oder 18, dadurch gekennzeichnet, dass 
Leuchtdioden verwendet werden, insbesondere RGB-LEDs. 

20. Verfahren nach einem der vorhergehenden Anspruche 17 bis 19, dadurch 
gekennzeichnet, dass LEDs in Farbtripeln aus den Farben rot, grun und 
blau verwendet werden. 

21. Verfahren nach einem der Anspruche 17 bis 20, dadurch gekennzeichnet, 
dass die LEDs geblitzt werden, wobei insbesondere Stromimpulse von 1,0 
bis 0,01 ms auf die Dioden aufgebracht werden. 

22. Verfahren nach einem der vorhergehenden Anspruche 1 bis 21 , wobei eine 
Referenzkontur von zumindest zwei Kameras ermittelt wird, urn eine drei- 
dimensionale Positionskorrektur fur die Auftragseinrichtung mit Hilfe des 
Stereometrieverfahrens durchzufOhren. 

23. Verfahren nach Anspruch 22, dadurch gekennzeichnet, dass die beiden 
Kameras das Substrat, einen Bauteilabschnitt oder ein oder mehrere Bau- 
teile als Vollbild oder GrofJbild aufnehmen, wobei die Vollbilder oder GroB- 
bilder der beiden Kameras einen Oberlappungsbereich ergebende dreidi- 
mensionale Lageerkennung der Referenzkontur zur Justierung der Auf- 
tragseinrichtung vor dem Aufbringen der Struktur verwendet wird. 
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24. Verfahren nach einem der Anspruche 22 Oder 23, dadurch gekennzeich- 
net, dass eine Projektion zur dreidimensionalen Auswertung auf den Be- 
reich der Referenzkontur aufgebracht wird, insbesondere eine oder mehre- 
re Laserlinien als Projektion auf das Substrat aufgebracht werden. 

25. Verfahren nach einem der Anspruche 1 bis 24, dadurch gekennzeichnet, 
dass eine Kalibrierung der einzelnen Kameras zur Zuordnung der Winkel- 
zugehorigkeit vorgenommen wird, wobei insbesondere ein Kreisbogen der 
Kalibriervorrichtung mit Markierungsstellen mit 0°, 120° und 240° fur drei 
Kameras verwendet wird. 

26. Verfahren nach einem der Anspruche 1 bis 25, dadurch gekennzeichnet, 
dass der Abstand der Einrichtung zum Auftragen der Struktur zu einem 
Bauteilmerkmal gemessen wird, urn eine Lageprufung der aufgebrachten 
Struktur durchzufuhren, wobei zur Abstandsmessung insbesondere eine li- 
nienformige Grauwertkantenantastung verwendet wird. 

27. Vorrichtung zum Erkennen einer auf einem Substrat aufzubringenden 
Struktur, vorzugsweise eine Kleberraupe oder Kleberspur, zur Durchfuh- 
rung eines Verfahrens gemas den Anspruchen 1 bis 26, wobei zumindest 
ein Beleuchtungsmodul und eine Sensoreinheit vorgesehen ist, dadurch 
gekennzeichnet dass die Sensoreinheit aus mindestens einer Kamera, 
insbesondere mehreren Kameras, aufgebaut ist, wobei die Kameras urn 
die Einrichtung zum Auftragen der Struktur vorgesehen sind und an dieser 
derart angeordnet sind, dass die Kameras jeweils auf die Einrichtung zum 
Auftragen der Struktur ausgerichtet sind, dadurch gekennzeichnet, dass 
die einzelnen Kameras derart verschaltet werden, dass die Bilder aller Ka- 
meras in einer Bildsequenz gespeichert werden, wobei von jeder Kamera 
lediglich ein Streifen des Bildes unter Bildung eines Teils der Bildsequenz 
aufgenommen wird, wobei oder mehrere Kameras zumindest einen im 



[MU06005489] 
22.06.2006 



-5- 



QU0IH10/P-WO2 



Anmelder: QUISS GmbH 

Anwaltsakte: QU01 H1 0/P-WO2 

wesentlichen kreisfCrmigen Caliper oder umlaufenden Caliper bilden, 
dessen Mittelpunkt oder Zentrum im wesentlichen die Einrichtung zum Auf- 
tragen der Struktur bildet, wobei insbesondere die Kameras auf einen Kreis 
um die Auftragseinrichtung ausgerichtet sind, dessen Mittelpunkt im 
wesentlichen mit dem Mittelpunkt der Auftragseinrichtung ubereinstimmt. 

28. Vorrichtung nach Anspruch 27, dadurch gekennzeichnet, dass sich die axi- 
ale Langsachse der einzelnen Kameras in Blickrichtung im wesentlichen 
mit der axialen Langsachse der Auftragseinrichtung schneidet, wobei die 
einzelnen Kameras, insbesondere drei Kameras, in Umfangsrichtung in je- 
weils gleichem Abstand voneinander angeordnet sind. 

29. Vorrichtung nach Anspruch 27, dadurch gekennzeichnet, dass die Bildauf- 
nahmefrequenz entsprechend der Datenverminderung durch die Aufnahme 
von lediglich einem Streifen des Bildes erhdht wird. 

30. Vorrichtung nach Anspruch 27 und/oder 29, dadurch gekennzeichnet, dass 
die Bildstreifen der einzelnen Kameras zu einem einzigen Bild zusammen- 
gefugt werden, um eine Referenzauftragsstruktur einzulernen und miteiner 
aufgebrachten Kleberspur zu vergleichen. 

31. Vorrichtung nach einem der AnsprQche 27 bis 30, dadurch gekennzeich- 
net, dass die einzelnen Kameras einen Oberlappungsbereich von jeweils 
mindestens 10°, insbesondere 30° bis 90°, zur nachsten Kamera aufwei- 
sen. 

32. Vorrichtung nach einem der vorhergehenden AnsprQche 27 bis 31, da- 
durch gekennzeichnet, dass das Beleuchtungsmodul aus LEDs, insbeson- 
dere Infrarot-LEDs, UV-LEDs oder RGB-LEDs aufgebaut ist. 
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33. Vorrichtung nach Anspruch 32, dadurch gekennzeichnet, dass die LEDs 
geblitzt werden, wobei Stromimpulse von 1,0 bis 0,01 ms verwendet wer- 
den. 

34. Vorrichtung nach einem Anspruche 27 bis 33, dadurch gekennzeichnet, 
dass zur Kalibrierung der einzelnen Kameras fur die Zuordnung der Win- 
kelzugehfirigkeit eine Kalibriervorrichtung mit einzelnen Formelementen 
verwendet wird, wobei die Formelemente insbesondere einen Winkelab- 
stand von im wesentlichen 10° aufweisen. 

35. Vorrichtung nach Anspruch 34, dadurch gekennzeichnet, dass die Kalib- 
riervorrichtung zumindest drei Markierungsstellen aufweist, die in einem 
Kreisbogen der Kalibriervorrichtung von im wesentlichen 0°, 120° und 240° 
angeordnet sind, urn drei Kameras zu kalibrieren. 

36. Vorrichtung nach Anspruch 35, dadurch gekennzeichnet, dass sich die 
Markierungsstellen auf der Kreisbahn in einem Winkelbereich von jeweils 
im wesentlichen 10° erstrecken, wobei die Markierungsstellen insbesonde- 
re durch zumindest zwei Formelemente gebildet werden. 

37. Vorrichtung nach einem der Anspruche 27 bis 36, dadurch gekennzeich- 
net, dass eine Projektionseinrichtung an der Auftragseinrichtung vorgese- 
hen ist, welche einen oder mehrere Merkmale, insbesondere Streifen, auf 
das Substrat fur eine dreidimensionale Auswertung projiziert 

38. Vorrichtung nach Anspruch 37, dadurch gekennzeichnet, dass die Projekti- 
onseinrichtung eine oder mehrere Laserlinien zur dreidimensionalen Pro- 
filauswertung aussendet. 
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